11. 循环神经网络(第一部分)

我们终于要探讨循环神经网络，打开进入新内容的大门！

循环神经网络的原则与前馈神经网络相同，这正是我们花费大量时间提醒自己在训练阶段使用前馈和反向传播算法步骤的原因。

前馈神经网络和循环神经网络之间存在两个主要区别。循环神经网络使用：

• 序列作为训练阶段的输入，且
• 记忆要素

存储是隐藏层神经元的输出，在接下来训练步骤中将作为网络的额外输入。

三层基本神经网络的反馈作为存储输入，叫做Elman网络，如下图所示：

正如历史一瞥页面中提到的，
这是1990年Elman网络的论文原稿。此处提供链接，因为这是全球循环神经网络的重要里程碑。为了简便，你可以查阅下列额外信息。

现在继续学习下一个视频，了解循环神经网络更多信息。